Auditing Cross-Lingual Fairness in Language Model Watermarking
审计语言模型水印的跨语言公平性
🧭 LLM 文本水印跨语言公平性评估
Case Western Reserve University
提出四组件跨语言评估框架，揭示LLM水印在多语言场景下的结构性公平性差距
📌 工作参考价值（4 点）
- 多语言业务中部署生成式文本水印或检测时，不要沿用英文场景的固定检测阈值；应像论文一样按语言/文字/类型学家族分别做经验校准，否则会因校准失败误判检测能力。
- 评估生成质量时不要只用一个指标，可以借鉴其三种不重叠范式：分布层（与参考分布距离）、语义配对（同义改写一致性）、参考困惑度，三者分离能暴露单指标掩盖的跨语言质量下降。
- 跨语言差异可以用广义熵按语言类型学家族分解，区分“家族间结构性差距”和“语言个体噪声”，这适合多语言电商文案、翻译、query 生成等场景做公平性审计。
- 对多语言生成任务（如广告文案本地化、客服消息）做模型评估时，显式按文字系统/语系分层报告指标，避免平均分掩盖低资源语言或小众文字的失败模式。